package rdd01.transform

import org.apache.spark.rdd.RDD
import org.apache.spark.{SparkConf, SparkContext}

object Spark_transter_Glom {
  def main(args: Array[String]): Unit = {
    val sparkConf=new SparkConf().setMaster("local[*]").setAppName("FlatMap")
    val sc=new SparkContext(sparkConf)
    //RDD算子glom(),直接将分区里的数据转换为同一类型的数据
    val rdd:RDD[Int]=sc.makeRDD(List(1,2,3,4),2)
    val glomRDD:RDD[Array[Int]] = rdd.glom()
    println(glomRDD.collect().mkString(","))
    val glomAarray:RDD[Int]=glomRDD.flatMap(
      data=>{
        data
      }
    )
    glomAarray.collect().foreach(println)
    glomRDD.collect().foreach(data=>println(data.mkString(",")))
    sc.stop()
  }

}
